Phụ thân

Cha của Cao Ngao Tào là Cao Dực, tự Thứ Đồng, tính tình hào sảng hiệp nghĩa, được người làng kính trọng. Nhờ là cường hào ở vùng Sơn Đông [15] Cao Dực được phong làm Bột Hải thái thú, sau đổi làm Đông Dực Châu thứ sử, gia phong Trấn Đông tướng quân.Khi Nhĩ Chu Triệu giết Hiếu Trang Đế, Cao Dực tụ tập binh mã bảo vệ quê nhà, nói với bốn con trai: "Hoàng thượng gặp hoạn nạn, là sỉ nhục của bề tôi; hoàng thượng chịu sỉ nhục, bề tôi chỉ có chết mà thôi. Nay quốc gia trong cơn nguy khốn, chính là lúc phá gia báo quốc." Không lâu thì mất. Năm Trung Hưng thứ nhất (531), được truy tặng Sứ trì tiết, Thị trung, Thái bảo, Lục thượng thư sự, Ký Châu thứ sử, thụy hiệu là Văn Tuyên.

Cao Dực có bốn con trai là Cán, Thận, Ngang và Quý Thức.

Anh em

Anh cả Cao Ngao Tào là Cao Càn cũng là tướng nhà Bắc Ngụy, tham gia chống Nhĩ Chu Vinh rồi đi theo Cao Hoan. Vì trung thành với Cao Hoan nên bị Bắc Ngụy Hiếu Vũ Đế giết.

Anh thứ là Cao Thận, tự là Trọng Mật, yêu thích văn sử, chí hướng khác hẳn các anh em, từng giữ các chức vụ Thương Châu thứ sử, Đông Nam đạo hành đài thượng thư, thứ sử Quang Châu, gia phong Phiêu kỵ đại tướng quân, Nghi đồng tam ty. Cùng các anh theo giúp Cao Hoan, được thăng làm thị trung, Khai phủ, rồi thứ sử Duyện Châu, không lâu sau lại về kinh nhậm chức Ngự sử trung úy. Về sau, Cao Thận vì bất hòa với Cao Trừng, nên đầu hàng nhà Tây Ngụy.

Người em nhỏ là Cao Quý Thức (516 – 553), tự Tử Thông, có can đảm, khí phách như Cao Ngao Tào, trở thành tướng nhà Đông Ngụy và khai quốc công thần nhà Bắc Tề.

Họ hàng

Họ Cao là một họ lớn ở Bắc triều. Cao Doãn (390 – 487), danh thần nhà Bắc Ngụy là em họ của Cao Dực. Ông nội của Cao Ngao Tào là Cao Di có ba con trai, Cao Dực là thứ 3.

Con trai của anh cả Cao Dực là Cao Vĩnh Nhạc, làm quan đến Vệ tướng quân, hữu quang lộc đại phu, Ký Châu đại trung chính, sau làm Bác Lăng thái thú, tự sát mà chết. Con trai của Vĩnh Nhạc là Cao Trường Mệnh đã từng theo Cao Ngao Tào chống lại Nhĩ Chu Thế Long ở cửa Đại Hạ của Lạc Dương vào năm Vĩnh An thứ 3 (530), được thụ phong Quang lộc đại phu. Cao Hoan trước sau đã phong Trường Mệnh làm Ung Châu thứ sử, Hoài Dương huyện nam, Yên Lăng huyện bá. Năm Vũ Định thứ 5 (548), Trường Mệnh chinh thảo Hầu Cảnh bị giết, được truy tặng Ký Châu thứ sử. Năm 1973, trong quần thể các ngôi mộ của dòng họ Cao ở huyện Cảnh, phát hiện mộ của Cao Trường Mệnh.

Con trai của anh thứ Cao Dực là Cao Duyên Bá từng nhậm các chức vụ Trung tán đại phu, An Châu thứ sử, được phong Vạn Niên huyện nam, Năm Thiên Bảo thứ nhất (550) nhà Bắc Tề, được gia phong Chinh Tây tướng quân, thăng làm tử tước, sau khi mất được truy tặng Thái phủ thiếu khanh.